package com.tedu;

import us.codecraft.webmagic.Spider;

/**
 * 爬虫的入口
 *
 *
 */
public class WebMagicMain {

    public static void main(String[] args) {
        //Spider是WebMagic内部流程的核心
        //声明 spider
        Spider spider = Spider.create(new PageProcessorMV());
        //设置spider的参数
        spider.addUrl("http://www.scnjnews.com/news/index.htm");
        spider.thread(5);
        spider.addPipeline(new PipelineMySql());
        spider.run();
    }
}
